Di Hoà viên có lịch sử tồn tại trên 800 năm với nhiều tên gọi khác nhau. Đầu đời nhà Tấn, một cung điện tên là Kim Sơn cung đã được xây dựng tại nơi mà ngày nay là Di Hoà viên. Năm 1750, Càn Long Đế xây Thanh Y viên tại khu vực này để mừng sinh nhật mẹ ông.

Năm 1860, trong Chiến tranh Nha Phiến, liên quân Anh - Pháp bắn phá khiến Thanh Y viên bị hư hại nặng. Khoảng 28 năm sau, Từ Hi Thái hậu lấy ngân quỹ vốn dùng để hiện đại hóa hải quân ra trùng tu hoa viên trong vòng 10 năm và đặt tên là Di Hoà viên.

Năm 1900, trong loạn Quyền Phỉ, liên quân 8 nước lại phá hoại hoa viên lần nữa. Khi Từ Hi Thái hậu hồi cung tại Bắc Kinh năm 1903, bà cho đại trùng tu hoa viên.